草庐IT

java - ConcurrentHashMap 内存开销

全部标签

google-app-engine - 使用 Go、App Engine、专用内存缓存和实例内存实现分片计数器

我们计划实现一个可大规模扩展的后端系统,该系统基本上必须在很短的时间内(大约5分钟)计算数十万最终用户的投票。实现可能会在AppEngine上完成,使用Go运行时和专用Memcache服务。或许,Datastore将用于在投票期后保留计数器值。我们目前的架构想法和问题:我们计划将实例内存用于即时的每个请求计数。我们假设仅使用Go全局变量实际上转化为“使用实例内存”是否正确?我们计划将每个实例的总计数器值(全局变量的值)以待定义的时间间隔存储到DedicatedMemcache中,例如每10秒或以250次为增量。我们可能会对这些memcached计数器进行分片,以避免单个键/项的峰值负载

go - 解析 Freebase RDF 时 golang 内存不足

我正在使用Golang中的XML包解析压缩和流式传输的FreebaseRDF的三元组。但是,我收到内存不足错误。我必须进行垃圾收集吗?我怎样才能做到这一点?将该三元组写入XML文件后如何清除内存?这是我的代码:http://play.golang.org/p/dWvbtcs7wy主要包import("bufio""flag""fmt""io""net/url""os""regexp""strings")varinputFile=flag.String("infile","freebase-rdf","Inputfilepath")varfilter,_=regexp.Compile("

go - 这是 goroutine 开销的一个更好的代码

我想让Reader.Read与channel通信并发。所以我做了两种运行方式1:typeReturnReadstruct{ninterrerror}typeReadGoStstruct{Returnc2:funcReadGo(rio.Reader,b[]byte)我认为代码2产生了太多开销哪个代码更好?1?2? 最佳答案 代码1更好,而且可能更快。代码2只会读取一次。但我认为这两种解决方案都不是最好的。你应该循环读取并只发回读取的字节。类似于:http://play.golang.org/p/zRPXOtdgWD

memory-leaks - 这会导致 Go 中的内存泄漏吗?

在下面的代码中,我有两个结构类型:ObjectDefinition和fieldDefinition都在同一个包中。fieldDefinition结构只能通过ObjectDefinition上的方法创建,以防止出现孤立字段(相关系统将是可扩展的CRM)。AddReferenceField方法应该创建一个新的fieldDefintion,在其上设置一些变量,将其添加到父结构的*fieldDefinitionslice中,然后然后还返回指向它的指针,以允许程序员轻松地进一步操作该字​​段,而无需从slice中查找和检索它。typeObjectDefinitionstruct{myIdid.I

go - 如何在 make() 语句之前确定可用内存

在Go中,当使用make语句时,例如,分配兆字节的内存make([]byte,1024*1024*d)有没有办法在请求更多内存之前确定有多少内存可用? 最佳答案 感谢您的所有投入。我决定使用Max_Memory配置选项,因为此用例是在仅运行此应用程序的测试服务器上利用n兆字节的内存,最高可用内存的大约75%,作为触发的一种方式在测试环境中自动缩放。 关于go-如何在make()语句之前确定可用内存,我们在StackOverflow上找到一个类似的问题: htt

string - 内存中字符串去重

上下文:我正在写一些东西来处理日志数据,其中涉及将几GB的数据加载到内存中并交叉检查各种内容,查找数据中的相关性并将结果写入另一个文件。(这本质上是加载到Druid.io集群之前的cooking/非规范化步骤。)为了性能和代码简单性,我想避免将信息写入数据库——假设在可预见的future数据量一次处理可以通过给机器增加内存来处理。我的问题是尝试在我的代码中显式删除重复字符串是否是个好主意;如果是这样,什么是好的方法。这些日志文件中的许多值都是完全相同的文本片段(粗略估计,文件中总文本值的大约25%可能是唯一的)。由于我们谈论的是GB数据,虽然ram很便宜并且可以进行交换,但仍然存在限制

Go:函数返回指向内存的指针

这个问题在这里已经有了答案:Returnpointertolocalstruct(2个答案)关闭7年前。我正在关注golang之旅,此页面:https://tour.golang.org/methods/3packagemainimport("fmt""math")typeVertexstruct{X,Yfloat64}func(vVertex)Scale(ffloat64)*Vertex{v.X=v.X*fv.Y=v.Y*freturn&v//I'mreturningapointertov}func(vVertex)Abs()float64{returnmath.Sqrt(v.X*v

Golang websocket nil内存错误

下面是我的websocket服务器的代码。http.Handle("/gatewayconnector",websocket.Handler(socketHandler))方法socketHandler的代码如下:funcsocketHandler(ws*websocket.Conn){LoadClient(ws)varmsg[]bytefor{iferr:=websocket.Message.Receive(ws,&msg);err!=nil{log.Error("ErrorinsocketHandler:",err)break}validateMessage(msg)}}套接字处理

go - 为什么我会发生内存泄漏?

我有以下内容:http://play.golang.org/p/1aaive8KQx当我打印runtime.NumGoroutine()时,我得到3。我不应该只得到1吗?为什么?packagemainimport("log""runtime""time")funcmain(){fori:=1;i 最佳答案 有一个奇怪的竞争条件。基本上,当您调用Println时,一些goroutine仍在运行,但很快就会终止。在Println之前休眠,您将获得1个进程。如果您阅读日志,您将看到2个超时-这意味着您跳过了循环中的2个channel读取。

go - 如何设置 HTTP Post 实体,如 Java 的方法 HttpPost.setEntity

我是一名新的golang程序员。在java中,使用HTTP.setEntity()方法很容易设置。但在golang中,我有测试服务器的方式来设置它,但我们的服务器仍然缺少接收实体数据。这是代码:funcbathPostDefects(){url:="http://127.0.0.1/edit"varjsonStr=[]byte(`{"key":"abc","id":"110175653","resolve":2,"online_time":"2016-7-22","priority":1,"comment":"something.."}`)req,err:=http.NewReques